多模态媒介

我们知道，“模态”这个术语的使用已经超出了语言学的范畴，声音、图像、颜色、行为等都对符号文本的意义施加压力。这是和当下日新月异的传播媒介和传播手段相关联的，过去主要以语言符号作为交流渠道的现象，如今发生了多重转向，今天的世界是一个多种媒介共存的时代，人们赖以交流的传播媒介形态更加多元化。

特别是在新媒介技术中，融合了多种传播符号元素，如声音符号、文字符号、色彩符号、形象符号等，每一种符号元素进入文本之前，都携带着特定的意义，这说明，以新媒介技术为基础的传播文本，是一个融合了多种传播符号的“多模态”文本。意义如此广泛地存在和分布于多模态媒介中，所有的这些符号元素都成为意义生成的符号资源。

因此仅仅分析语言模态是不够的，任何一个意义系统都应当考虑多种模态的相互角力，也就是说，现代社会几乎所有的传播和交流行为都是多模态的。这意味着，任何的社会文化范畴内的交流和传播过程都依托于多模态表达。多模态研究脱胎于系统功能语言学中的多模态语篇分析，该观点认为，构成语篇的各种符号共同参与我们的日常交往行为，在这种语境下，参与交往的各种渠道和媒介都显现各自的模态，这些模态形成合力共同引导读者理解语篇和语境意义。

多模态分析就是把参与交流的单一模态所表征出的再现意义、互动意义和构成意义综合起来，分析它们之间如何互动，最后所产生的意义潜势如何推动了多模态符号体系控制下发生的现实行动。多模态符号文本与传统的符号学研究相比，传统的符号学研究独立的符号个体意义，比如玫瑰花代表爱情。而多模态符号文本则是考虑符号在一个共处系统中如何与其他符号在交流中共同发挥作用。

多模态文本中每一个模态符号都成为了该文本意义的符号资源，符号资源实际上是意义资源。然而符号资源的存在必须依托于特定的媒介，模态系统中任何单独的模态符号都必须以一定的物质形式作为载体，模态符号的意义通过物质形式的载体才能表达出来。

模态符号的意义表达是通过其依托的物质载体展开的，多模态文本中的任何一个单独模态符号都有其栖息意义的媒介，从这个层面来说，多模态文本的存在要依靠模态符号意义的表达和解释，因此，多模态符号文本实际上是由多模态媒介来维系的，从传播符号学的角度来看，多模态符号文本中的模态展开符号运作，必然会涉及该模态符号中的语法结构，这样的一种现象，我们称之为“元传播”。